eval_batch_size:13107200, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.1214    recall@10 : 0.1838    recall@20 : 0.2665    recall@50 : 0.4161    mrr@5 : (0.0759+0j)    mrr@10 : (0.0852+0j)    mrr@20 : (0.0913+0j)    mrr@50 : (0.0961+0j)    ndcg@5 : (0.0828+0j)    ndcg@10 : (0.1031+0j)    ndcg@20 : (0.1248+0j)    ndcg@50 : (0.1559+0j)    hit@5 : 0.1386    hit@10 : 0.2091    hit@20 : 0.2976    hit@50 : 0.4516    precision@5 : 0.0285    precision@10 : 0.022    precision@20 : 0.0163    precision@50 : 0.0104
Test result:
recall@5 : 0.1226    recall@10 : 0.1815    recall@20 : 0.2596    recall@50 : 0.4112    mrr@5 : (0.0831+0j)    mrr@10 : (0.0917+0j)    mrr@20 : (0.0974+0j)    mrr@50 : (0.1023+0j)    ndcg@5 : (0.0872+0j)    ndcg@10 : (0.1062+0j)    ndcg@20 : (0.1265+0j)    ndcg@50 : (0.1581+0j)    hit@5 : 0.1443    hit@10 : 0.2101    hit@20 : 0.2932    hit@50 : 0.4478    precision@5 : 0.0307    precision@10 : 0.023    precision@20 : 0.0166    precision@50 : 0.0106

eval_batch_size:13107200, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.1203    recall@10 : 0.1847    recall@20 : 0.2657    recall@50 : 0.4112    mrr@5 : (0.0746+0j)    mrr@10 : (0.0841+0j)    mrr@20 : (0.0901+0j)    mrr@50 : (0.0948+0j)    ndcg@5 : (0.0817+0j)    ndcg@10 : (0.1027+0j)    ndcg@20 : (0.1239+0j)    ndcg@50 : (0.1542+0j)    hit@5 : 0.1378    hit@10 : 0.2093    hit@20 : 0.2967    hit@50 : 0.4463    precision@5 : 0.0285    precision@10 : 0.022    precision@20 : 0.0163    precision@50 : 0.0103
Test result:
recall@5 : 0.1217    recall@10 : 0.181    recall@20 : 0.261    recall@50 : 0.4083    mrr@5 : (0.0824+0j)    mrr@10 : (0.0914+0j)    mrr@20 : (0.0971+0j)    mrr@50 : (0.1018+0j)    ndcg@5 : (0.0867+0j)    ndcg@10 : (0.1059+0j)    ndcg@20 : (0.1267+0j)    ndcg@50 : (0.1574+0j)    hit@5 : 0.1426    hit@10 : 0.2101    hit@20 : 0.2937    hit@50 : 0.445    precision@5 : 0.0305    precision@10 : 0.0229    precision@20 : 0.0167    precision@50 : 0.0106

eval_batch_size:13107200, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0583    recall@10 : 0.0953    recall@20 : 0.1443    recall@50 : 0.2364    mrr@5 : (0.0362+0j)    mrr@10 : (0.0419+0j)    mrr@20 : (0.0458+0j)    mrr@50 : (0.049+0j)    ndcg@5 : (0.0396+0j)    ndcg@10 : (0.0518+0j)    ndcg@20 : (0.0647+0j)    ndcg@50 : (0.084+0j)    hit@5 : 0.0669    hit@10 : 0.1102    hit@20 : 0.1666    hit@50 : 0.2685    precision@5 : 0.0137    precision@10 : 0.0114    precision@20 : 0.0089    precision@50 : 0.006
Test result:
recall@5 : 0.0626    recall@10 : 0.0947    recall@20 : 0.1434    recall@50 : 0.2487    mrr@5 : (0.0401+0j)    mrr@10 : (0.0451+0j)    mrr@20 : (0.0487+0j)    mrr@50 : (0.0522+0j)    ndcg@5 : (0.0427+0j)    ndcg@10 : (0.0533+0j)    ndcg@20 : (0.0659+0j)    ndcg@50 : (0.0876+0j)    hit@5 : 0.0746    hit@10 : 0.1131    hit@20 : 0.1666    hit@50 : 0.2797    precision@5 : 0.0157    precision@10 : 0.0124    precision@20 : 0.0093    precision@50 : 0.0064

eval_batch_size:13107200, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.099    recall@10 : 0.1521    recall@20 : 0.2321    recall@50 : 0.3744    mrr@5 : (0.0594+0j)    mrr@10 : (0.0674+0j)    mrr@20 : (0.0733+0j)    mrr@50 : (0.078+0j)    ndcg@5 : (0.0658+0j)    ndcg@10 : (0.0832+0j)    ndcg@20 : (0.104+0j)    ndcg@50 : (0.1334+0j)    hit@5 : 0.1135    hit@10 : 0.1743    hit@20 : 0.2624    hit@50 : 0.4102    precision@5 : 0.0235    precision@10 : 0.0184    precision@20 : 0.0143    precision@50 : 0.0094
Test result:
recall@5 : 0.0998    recall@10 : 0.1539    recall@20 : 0.2288    recall@50 : 0.374    mrr@5 : (0.0669+0j)    mrr@10 : (0.075+0j)    mrr@20 : (0.0804+0j)    mrr@50 : (0.0851+0j)    ndcg@5 : (0.0699+0j)    ndcg@10 : (0.0874+0j)    ndcg@20 : (0.1068+0j)    ndcg@50 : (0.1369+0j)    hit@5 : 0.1196    hit@10 : 0.1811    hit@20 : 0.2607    hit@50 : 0.41    precision@5 : 0.0254    precision@10 : 0.0197    precision@20 : 0.0147    precision@50 : 0.0097

